Current Result Document :
| 한글제목(Korean Title) |
다양한 네트워크 및 디스크 환경에서 Apache Kafka 벤치마크 테스트 |
| 영문제목(English Title) |
Apache Kafka Benchmark Test over Various Network and Disk Environments |
| 저자(Author) |
홍이삭
김다솔
문양세
Yisak Hong
Dasol Kim
Yang-Sae Moon
|
| 원문수록처(Citation) |
VOL 48 NO. 02 PP. 1187 ~ 1189 (2021. 12) |
한글내용
(Korean Abstract) |
본 논문에서는 네트워크와 디스크 환경이 Apache Kafka의 성능에 미치는 영향을 확인하기 위해 Ethernet과 InfiniBand 환경에서 벤치마크 테스트를 수행한다. Kafka는 오픈소스 분산 메시지 큐 시스템으로, 메시지를 파일 시스템에 저장한다. InfiniBand는 고성능 네트워크 장비로 Ethernet과 동일하게 사용할 수 있도록 IPoIB(IP over InfiniBand) 기능을 지원한다. 본 논문에서는 네트워크 환경에 따른 성능 차이를 확인하기 위해 Ethernet과 IPoIB 환경에서 메시지 크기를 달리하여 프로듀서에 대한 실험을 진행한다. 또한, 브로커가 동작하는 노드의 CPU 사용률을 측정하여 이것이 Kafka 성능에 미치는 영향을 분석한다. 마지막으로, 고성능 네트워크 환경에서 디스크가 Kafka 성능에 미치는 영향을 확인하기 위해, IPoIB 환경에서 Kafka 메시지 저장소를 HDD와 SSD로 나누어 테스트를 진행한다. 벤치마크 테스트 결과, IPoIB를 사용하여 Kafka 클러스터를 구성하는 경우, Ethernet 대비 높은 처리량과 낮은 지연시간을 보였다. 또한, IPoIB 환경에서 디스크를 바꾸어 비교 실험을 한 결과, SSD 대비 HDD의 낮은 읽기/쓰기 속도가 Kafka 성능에 영향을 미치는 것으로 나타났다. 이 같은 벤치마크 결과는 네트워크 환경과 디스크 성능을 고려한 효율적인 Kafka 운영 환경 구축에 도움이 될 것이라 생각된다. |
영문내용
(English Abstract) |
|
| 키워드(Keyword) |
|
| 파일첨부 |
PDF 다운로드
|
